게 이 트 레 벨 연 산 구 조 를 사용한 신 경 망 의 1『20 ㅅ 구현 
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요 약 


직 접 회 로 의 직 접 도 증 가 로 인해서 신 경 망 을 칩 으로 구 현 하려는 시 도 가 이뤄지고 있고 현재 뉴 런 을 모 방 하 
는 칩 이 나 와 있는 상 황 이다. 하지만 이런 시 도 는 신경 자 체 를 모 방 하려는 것으로 아직 직 접 회 로 의 직 접 도 를 
볼 때 그런 시 도 가 의 도 하는 궁 극 적 인 목 표 인 대 규 모 의 신 경 망 을 구 현 하기엔 부 적 합 하다. 차라리 신 경 망 의 
단 위 를 이루는 뉴 런 을 구 현 하는 것 보다는 신 경 망 을 모 방 하 는 시 스 템 의 모 방 이 보다 적 절 하다. 여러 신 경 망 이 
나 패 턴 분류 등 의 신 호 처 리 에서 공 통 으로 필 요 로 하는 연 산 이 있다. 바로 대 량 의 신 호 를 곱 하 고 더하고 1 ㅁ [' 를 
읽는 연 산 이다. 이 연 산 은 신 경 망 에서 한 충의 각 노 드 들 로 부터 그에 따른 다음 충 으 로 의 연 결 들 각 각 을 
곱 해 서 더 해 주 고 시 그 모 이드 값 을 발 생 시 키 는 작 업 과 동 일 하며, 반 복 적 이고 많은 계 산 량 을 요 구 하므로 이 
부 분 을 고속 하 드 웨 어 로 만들 경우 시스템 전 체 의 속도 증 가 를 기대할 수 있다. 그래서 여기서는 뉴 런 이 
아닌 신 경 망 올 구 현 하는데 그것은 신경망 뿐만 아닌 다른 많은 옹 용 을 기대할 수 있는 공통적 연 산 부 분 이다. 
이 연 산 을 앞으로 논 의 할 비트 분리 연 산 구조 방 식 으로 처 리 함 으로써 실시간 병 렬 처 리 에 응용할 수 있도록 
하였다. 


스 체 6 바 21 씨 66\00'5 023 ㅅ ^ 뷰 68311280004 108108 14816 Ｌ6? ㅋ 61] 506000416 


41000 1 ㄴ 66. 800 0119 46009 


28267168^607 


므 6080466 0 100168.9102@ ㅁ 0410106 0 1011606181(60 040041[, 42616 15 70005 0168 0 1081008 016 0 ㅁ 604131 06[\00( 
2200 50006 아 10 15 630. 6 바 4156 19 200 00006 06028486 ?1.591 1601001083 ㅋ 0814" 54000 50 10786 1270\016. 
응 0 1001131100 ㅁ 01 \11016 557566070 01 06471 7 ㅁ 6[\016 15 10016 127006[. 그 116[6 195 60100000 070060416 ㅇ 10 51987861 
10006565910@ 858 10 406 0641861 206[\0 따 800 08600 16008201000. 그 18[ 16 27 ㅁ 14100110280 ㅁ 100 0 10766 81700401 0 
91801 800 1620108 ㄴㄴ. 1115 15 106011021 \1 타 50106 006180070 01 때, 300 ㅁ 660 1(6023076 300 13786 87004 
아 6810418000, 50 114 \6 1042166 10198 0811 \1 타 1 1820\216, 07681 59586601 5 ?6100167 \11 156 10006060. 50 
10 419 02006, 76 068187 ㅁ 7 ㅁ 6041 히 06(\00<, ㅁ 40 ㅁ 460100 \401 680 06 4560 10 10805 00167 116108. \6 1681126 
6 0802 657 10110\108 5608672660 0115 8001000 1060100, 800 1 080 106 800160 104 106 681 10006 09+ 헤 리 
1000699108. 


1. 서 론 


초 직 접 회 로 의 발 달 로 신 경 망 을 하 드 웨 어 로 구현 
할 필 요 성 이 커지고 있다. 90 년 대 에 여러 연 구 소 에서 
부 분 적 으로 신 경 망 칩 올 구 현 해 보 기 도 하고 신경망 
의 일 부 를 하 드 웨 어 로 구현해 보 기 도 하였는데 근본 
이 연 구 는 문 화 진 홍 부 와 2 사 업 단 의 지 원 을 받음. 또한 정 
부 과 학 기 술 부 에 의해 지 원 되는 뇌 과학 연구 프 로 그 램 에 
의해서 후 원 되고 있음. 

" 정회원, 포 항 공 대 학 교 석 사 과정 
'" 포 항 공 대학교 부교수 


적 으 로 는 소프트웨어 구 현 이 이 분야 연 구 의 주 류 였 
다. 한 국 통 신 에서 개 발 한 아날로그 신경망 칩 [1-7] 이 
나 전 자 통 신 연 구 소 에서 개 발 한 디지털 신 경 망 칩 [8], 
그리고 인텔 등 많은 회 사 에서 개 발 한 신경망 칩 들 
[9-10] 은 신 경 자 체 를 모델화 하려는 시 도 였으며 대 
규모 신 경 망 을 구 성 하기에는 부 적 합 하 였기 때문에 
널리 보 급 되 기 에 문 제 가 있었다. 그리고 00-8072 를 
활 용 한 신경망 칩 둥 은 확 장 성 등에 있어서 문 제 가 
있는 등 한 계 를 가지고 있다. 이런 문 제 들은 지 금 까 
지의 초 집적 기 술 이 아직 신 경 망 을 구 현 하기에는 적 
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합 하 지 않았기 때 문 이 라 여겨진다. 그러나 90 년 대 후 
반 에 들어서 대 규 모 의 집 적 회 로 가 점점 상 용 화 되고 
있어, 아직은 규 모 가 충분치 못하고 가 격 이 비싸 대 
중 화 되 기 에 는 멀 었 지 만, 연 구 실 차 원 에 서 의 연 구 는 
가 능 해 지 고 있다. 곧 신경망 기 술 에 있어서 하드웨어 
의 설 계 가 필 요 해 지 고 있는 것이다. 그런데 신 경 세포 
의 단 위 로 하 드 웨 어 를 구 현 하 고 이를 엮어서 대규모 
의 신 경 망 을 구 현 하는 이 전 의 방 법 들 은 비 효 율 적 일 
뿐만 아니라 집 적 기 술 이 발 달 한 다 해도 어려운 일로 
사 료 된다. 이전 방 법 으 로 는 칩 당 0(10) 정 도의 뉴런 
을 구현할 수 있었을 뿐이었다. 그렇다면 신경망 시 
스 템 을 모 방 하는 하 드 웨 어 적 인 다른 방 법 을 고 려 하 
는 것이 옮 을 것이다. 웅 용이 가 능 하 려면 신경망 자 
체 를 에뮬레이션 하는 방 향 으로 가야 하는 것이다. 
곧 전기적 하 드 웨 어 의 특 성 이 생 물 의 세 포 에서 보여 
지는 특 성 과 구 분 이 된다는 점 을 감 안 해 야 한다. 그 
래서 이번 연 구 에서는 여러 신 경 망 이나 패 턴 분 류 등 
의 신 호 처 리 에 서 공 통 으로 필 요 로 하는, 대 량 의 신호 
를 곱 하 고 더하고 변 환 하는 연 산 을 칩 을 통해 구 현 함 
으로써 신경망 천 체 에 서 계 산 량 이 많은 부 분 들을 하 
드 웨 어 로 수 행 하였다. 

최 근 에 는 8264 의 집 적 도 가 10 만 게이트 이 상 이 
되고 가 격 도 많이 내린 상 태 이 다. 물론 칩 하 나의 가 
격 이 26 한 대 의 가 격 에 필 적 할 정 도 이지만 순수 연 
구 차 원 에 서 사용할 수 있게 되었다. 이 정 도 면 작은 
규 모 이지만 웅 용이 가능한 신 경 망 을 구현할 수 있을 
것이다. 현재 신 경 망 을 8 ㅁ 204 ㅅ 구 조 와 관련해 연 구 한 
결 과 는 거의 없다. 826 ㅅ 가 계속 발 전 하 고 있는 최신 
기 술 이기 때 문 이 다. 8264 ㅅ 의 장 점 은 하 드 웨 어 구조 
를 프 로 그 램 으로 결정할 수 있다는 것이다. 그리고 
1106 ㅅ 의 \}171 코 드 를 이용해 826 구 조 에 서 5610 
구 조 로 하 드 웨 어 를 변 환 할 수 있는 410 100[Ｌ 들 이 
계 속 해 서 계 발 되고 있어 1806 ㅅ 의 ^51( 화 가 용 이 하 
게 되고 있다. 그래서 이번 연 구 에서는 『2(1& 를 사용 
한 신 경 망 의 에 뮬 레 이 션 적 구 현 을 하게 되었다. 구체 
적 으 로는 먼저 신경망 패 턴 인식 신 호 처 리 에 공통적 
으로 필요한 \410Ｌ 연 산 부 를 게 이 트 레 벨로 구 현 하기 
위한 하드웨어 구 조 를 연 구 하 였으며 이 하드웨어 구 
조는 82064 ㅅ 를 사 용 하여 구 현 하 였다. 그리고 이 칩 을 
장 착 한 20[ 보 드 를 개 발 하 고 이 시 스 템 을 기 반 으 로 
한 응용 소 프 트 웨 어 를 개 발 하였다. 86 에 서는 이를 
가지고 신 경 망 의 예 뮬 레 이 션 을 실 시 하였는데 하드 


웨 어 의 10Ｌ 등 의 특 성 으로 인해 *0『【 를 이용한 간 
단 한 문 자 인 식 을 해 보 았 다. 결 과 적 으로 4404)? 67560 
의 일부 연 산 과 정 들 을 구 현 한 것이다. 

곧 다 음 에는 이런 341# 의 전반적인 구 조 와 함께 
내 부 적 으로 어떠한 요 소 들이 칩 안에서 구 현 되었는 
지에 대해 논할 것 이 다 [11]. 그리고 이런 연 산 과 정 의 
구 현 을 위한 3 가 지의 비 트 분 리 구 조 를 위한 하드웨어 
구 조 를 제 시 하고 이 중 에서 구 현 된 아 키 텍 쳐 에 대해 
서 상 세 설 명 율 한 후에 실험 결 과 를 제 시 하 겠다. 


2. 신경망 모델 


여 기 서 의 신경망 모 델 은 구 체 적 으 로 [를 의미 
한다. 칩 은 다른 연 산 과 정 에도 사용될 수 있으나 이 
번 연 구 에서는 앞서 설 명 하였듯이 하드웨어 안에서 
006 40 13116 을 지 원 하 기 때문에 [를 모 텔 로 하 
였다. 

그림 1 은 44. ㅁ 2-679[60 의 전체적인 모 습 이다. 처음 
이 14404 125 이 고 다 음 이 은 닉 충 과 04004 187@ 이 다. 
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0 0 
0 0 
0 0 


그림 1. 버마 18\6「 06『060100 


각층 사 이 의 연 결 은 시 념 스 의 연 결 강 도 를 의 미 한 
다. 이 신경망 모 델 에서 좀더 세 분 화 된 부 분 을 찾아 
볼 수 있는데 그림 2 가 그 것 이 다. 

이때 107\8700700658 에 서 의 ×(/2) 은 다 음 과 같은 
수 식 으로 표 현 된다. 


0 =@( 압 04 ㆍ ‥200-4) 0) 


여기서 @() 은 시 그 모 이 드 함수, ※(30 은 입 력 노 
드 , 0(/) 는 연 결 강도, ※×(2/ 은 은 닉 노 드 이 다. 이 부 
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그림 2. 터너 1876『 06『6606 ㅁ 0 ㅇ 0 일부 


분 올 칩 에서 연 산 하 게 된다. 

전반적인 시 스 템 은 신경망 에뮬레이터 소프트웨 
어 (001.8), 201 드라이버, 신 경 망 칩 으로 구 성 된 다 . 신 
경 망 칩 은 신 경 의 기 본 계 산 을 하며 201 드 라 이 버 는 
신 호 를 이 칩 에 공 급 하 고 결 과 를 넘겨 받는다. 에뮬 
레 이 터 는 신 호 를 신 경 망 칩 이 처 리 할 수 있도록 가공 
해 공 급 하고 결 과 를 받아 처 리 한 다. 아울러 신 경 망 칩 
을 이용해 42, 0600760Ｌ 266, 008610 06 등 여러 
종 류 의 신 경 망 의 기 능 을 갖도록 한다. 물론 이번 연 
구 에서는 위에서 설명한 40[# 의 기 능 을 가 지 도록 하 
였다. 


3. 하드웨어 구조 


기 본 적 으 로 신 경 망 에서 곱 과 합 과 Ｌ)1' 를 하 드 웨 
어로 구 현 한 다. 곧 4 ㆍ #(72)( 4: ㅁ 006 의 값 으 로 이뤄 
진 행렬, 2(70): 연결 723106 로 이뤄진 행 렬 ) 을 구하고 
11 ㅁ 07 를 읽는 것이다. 이렇게 구 해 진 값 은 따로 하위 
의 레 지 스 터 에 저 장 한 후에 읽게 된다. 곧 기 본 적 으 
로 다 음 의 수 식 을 계 산 하는 것이다. 

= 홈 00 ‥200- 8. (9) 

다음 장 에서는 칩 에 대한 구 조 의 제 안 으로써 810 ㅁ 

20067 스 아 160046,(8 스 스 ), 40066 8187 ㅁ 24 아 1(60- 


1446(654), 81 ^001000 2701160006(08^ ㅅ ) 의 3 가 
지 370111600476[12-14] 를 제 시 하 도록 하겠다. 


3.1 116 5190 ^ ㅅ 006「 / 사 아 1116 어 나 6( 544) 


식 1 의 수 식 을 전 개 해서 다 음 의 수 식 을 얻을 수 


있다. 
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영이 업 10667-700)-667-1(0-101 ㆍ 00040. 
(3) 
이 수 식 과 연관된 그 럼 이 그림 3 에 나온다. 

먼저 0(&) 의 2 의 보 수 를 구 하 고 서 이를 레지스터 
에 저 장 한 다. 만약 ×,》 이 0 이 면 더할 필 요 가 없다. 
하지만 1 이 될 경 우 에 는 2(2) 이 %(4) 의 부 호 에 따라 
서 더 해 지거나 빼 진 다, 7.0. *7-1(). 결 과 적 으로 
×』-1( 씨 이 0 이 면 0(40 이 더 해 지고 1 이 면 레지스터 
에 저장된 -0(4 이 더 해 지게 된다. 

음 부 터는 이런 구 조 를 51977 4006/ 4700)02/0<- 
1076(564 ㅅ 4 ㅅ ) 라 부 르 겠 다. 이 구 조 는 그림 3 에 나타나 
있다. 이 구 조 의 특 징 은 덧 셈 기에 들어가는 아 규 먼트 
(378410601) 가 부 호 비 트 에 의해서 선 택 된 다는 것이 
다. 레 지 스 터 의 요 구 사 항 은 (7.+ 244) 210-1000 이 다. 

918 1 60168 에 의해서 계 수 를 선 택 하는 68\ 파 01108 
726600 다 는 420 게 이 트 로 이뤄져 있다. 

덧 셈 기 트리는 080, 『 ㅠ 0088800 ㅁ & ㅁ 87 (( ㅁ 2), 
(62737 Ｌ ㄴ 00 21680 ((61.4) 또는 (23025 5276 15680 
(054) 와 같은 방 식 으로 구 현 될 수 있다. 그 중에서 
(68 쇼 는 병 렬 성 과 0061410108 특 성 에 서 우월한 성 능 올 
가지고 있다. 08 | 168 19700) 2 1 ㅅ 트 리 로 구 현 될 
시 에 104 로 이뤄진 입 력 은 6081 의 트 리 롤 통 


그림 3. 54 구조 
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과하게 된다. 덧 셈 기는 (44+ 7.) + | 108 2(2+1) 1 의 
길 이 를 가져야 한다. 

덧 셈 기와 누 산 기 는 ㅁ 106106 레지스터 에 의해서 
분 리 되 있기 때문에 시 스 템 의 속 도 는 덧 셈 기 트 리 와 
누 산 기 의 12700888000 0613$ 에 의해서 결 정 된 다. 
0868 의 분 량 이 크기 때문에 누 산 시 간 은 덧 셈 기 트리 
의 0 ㅁ ㅠ 020888000 06185 를 훨씬 초 과 할 것이다. 다 음 에 
0『00888000 06!37 를 줄인 구 조 를 설 명 하 겠다. 


3.2 116 ^4006[ 5191 &【 아 111601416(4.64) 


8^ 스 를 대 신 할 다른 대 안 적 구 조 가 있다. 수식 1 
은 다 음 과 같이 쓸 수도 있다. 


원 240 -280-2+10] 다 업 2004091. 4 


이 수 식 과 연관된 그 림 이 그림 4 에 나온다. 

그럼 4 에 서 특 징 적 인 것은 부호 1670 이 547 07 
00040 1600 에 대해서 외 부 적 이 란 것이다. 1 이 
/-1 에 도 달 할 때 까지 부 호 는 필 요 하 지 않다. 이런 
성 질 은 그럼 4 처 럼 회 로 를 더욱 간 단 하게 만든다. 이 
런 형 식 의 구 조 를 4006 .519)207001706<420`6(28 ㅅ ) 이 
라 부른다. 

그림 4 의 구 조 에서 부 호 는 덧 셈 기 트 리 의 끝 에 서 
필 요 하다. 544 ㅅ 와는 달리 이 방 법 은 -<0(4) 를 필요 


그림 4. ^5^ 구조 


로 하지 않는다. 곧 레 지 스 터 룰 절 약 하 고 동시에 2 의 
보 수 를 만 들 어 내는 회 로 가 불 필 요 해 진다. 또한 덧셈 
기 트 리 에 입 력 을 선 택 하는 6\160108 회 로 가 간단 
해진다. 

단지 /=7,-1 일 때만 덧 셈 기 트 리 의 출 력 이 반전 
되면 된다. 

사실 치 금 의 구 조 는 이런 사 항 들을 제 외 하고 덧셈 
기 트 리 의 구 조 와 출력 덧 셈 기 의 구 조 가 54 ㅅ 와 동 
일하다. 다 음 에 이와는 다른 구 조 를 보 이 겠다. 

54 ㅅ 와 비 교 해 서 454 ㅅ 는 74 를 절 약 하 는 
(7.+ 42) 14168 를 가진 2 개 의 레 지 스 터 가 필요할 뿐 
이다. 또한 덧 셈 기 트 리 의 입 력 을 위한 6\0108 
어 00041 은 3\054 8866 가 적은 \\41 8816 가 필 요 하 다. 


3.3 81 20011100 사 아 1116 여 나 6(844) 


64&4& 와 494& 와 달리 정수 합의 형 태 를 벗어나서 
0 합의 형 태 를 사 용 하여 회 로 를 크게 간소화 하였 
. 수식 1 을 다 음 과 같이 전 개 할 수 있다. 


와 허 21 키 1-280-+10101-8000-40+ 10] 


개! 21 00091. (5) 


이 수 식 과 연관된 그 림 이 그럼 5 에 나온다. 
사실 248 ㅅ 의 핵심 14683 가 완전한 61 16*61 로 확장 


0*＊ ㆍ 2 


그림 5. 84 구조 


된 것이다. 부 호 는 7/=7.-1 07 = 4-1(6×%0140- 
10@ 46 0896 \0460 7=7.-1 300 72=44-1) 에 서 
필 요 하 다. 

844 와 ^454 ㅅ 와 달리 덧 셈 기 트리는 정수 대 신 에 
비 트 만을 받 아 들 인다. 결 과 적 으로 덧 셈 기 의 수가 줄 
어 들게 된다. 덧 셈 기 의 깊 이 는 아직 168 15 8 이다. 


3.4 면 적 - 시 간 그리고 계 산 적 복잡도 


이제 앞에서 설명한 3 가 지 구 조 에서 계산기 트리 
와 누 산 기 의 계 산 상의 복 잡 도 에 대해 설 명 하겠다. 누 
산 기 가 덧 셈 기 트 리 에 연 결 된 다면 606660 0100 은 
단지 3406 트 리 에 의해서 결 정 된 다. 또한 모든 구조 
는 동일한 누 산 기 와 0400 나 덧 셈 기를 지니게 된다. 
3 가 지 구 조 를 비 교 한 기 위해서 단지 계수 레지스터 
들, 40067 0 ㅁ 665, 06000108 07041077* 에 대해서 고 려 하 
겠다. 

0, 은 레 지 스 터 에 서 비 트 당 6866 의 수 를 의 미 한 
다. 일 반 적 으로 24,=6~? 88\6 가 된다. 

2, 는 111 30061 를 위한 6866 의 수 를 지 칭 한 다. 
이 값 은 일 반 적 으로 4』,=?7~8 이 된다. 

많은 공 간 을 차지하는 구조 중에서 주요한 요소 
중의 하 나 는 덧 셈 기 트 리 이 다. 08 ㅅ 에 서 구현 시 에 
각 각 의 덧 셈 기는 3 개 의 030 를 받아들이고 2 개 의 
04[0 바 을 생 성 한 다. 이는 계 산 을 복 잡 하게 만드는데 
예 를 들면 54, 454,844 ㅅ 를 위한 깊이 는 다음 
과 같다. 


20= | 1068 15 1. (6) 


여기서 2022. 또한 81] 43006@; 의 수 는 다 음 과 같다. 


협 (00+(00-10( 공 )"94 = 0(0204-100 


-( 용 )5+601-( 용 ) ㅋ -840( 옹 ) 아 1) 0006) 
“0》2 에 대해서 0400160 는 약 2204 이 된다. 여기 
서 844 ㅅ 에 대해서 24=1. 만약 720=108 15 0 를 가 
정 한 다 면 이 양은 대 략 적 으 로 10>2 에 대해서 2704 
이 된다. 
만약 모든 {1111 8006『 가 ㅁ 0011760 된다면 ㅁ 1061106 
레 지 스 터 의 수 는 다 음 과 같다. 
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협 200+70( 응 )"0 = 80(200-( 응 )? ) 


+60-( 응 )>-34( 응 ) 싸 1). (9) 00) 

여기서 24 스 에 대해 44=1. 20=10816-0 에 대 
한 대 략 적 인 값 은 4804. 식 8 과 식 10 은 간략한 식 으 
로 변 형 될 수 있는데 곧 77=108 1.6- 융 을 설정할 수 
있다. 이 경우, 계수 레지스터, 9\10108 012041[, 덧 
셈 기 트리, 6 ㅁ 08106 레 지 스 터 에 대한 8066 수 는 표 
1 에 나타나 있다. 

표 에서 전체 면 적 은 4 개 의 주요한 요 소 의 합 이 다. 
이 결 과 는 표 2 에 나타났다. 

여기서 844 ㅅ 는 다른 것 들 보 다 44 배 적은 6266 를 
취하고 있다. 


표 1. &[68 아 [00810 6161061115 


제자 
[오매 | | | | 


아해 + 심이 12 버 ( 


표 2. 10191 8768 10 08105 


바 버 


19615 후] - ㅡ 41015 두 -430616 806 
+[406-2)00+3) +490-2)06+3) | +[1600-3) 
-00615 치사 -860015 도 65 화사 


미 061406 된 3006: 에 대해서, 그럼 6 에 필터 탭 수 
# 와 면적 사 이 에 보 여 지 는 상 관 관 계 를 그렸다. 
죽은 탭 수 를 나타낸다. > 에 나타나는 면 적 은 

8866 수 또는 10[ 수 를 나타낸다. 계 산 상 의 편 의 를 위 
해서 /,=/44=8, 240,=.=7 을 가 정 하였다. 

이 그 림 은 면 적 의 관 점 에서는 1 덧셈 방 식 이 가 
장 좋은 것임을 보 여 주 고 있다. 그러나 ㅁ 006585178 
68006 에 서는 0 배 의 시 간 이 더 걸 런 다. 그 림 에서 곡선 
은 하위 60000 임 에 유 의 해 야 한다. 실제 구 현 에서는 
04104 3006", 000 ㅁ 01 1081< 등 의 추가적인 희 로 가 필 
요 하 기 때 문 이 다. 
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그림 6. (686 \5. 타 16 041100『 01 1116 19805 20 


:, 는 1111 30067 의 06137 를 나타낸다고 하자. 우리 
는 만 06006 의 유무 각 각 에 대해서 클럭 주 기 를 알아 
야 한다. 또한 하 나 의 540016 04[0 바 이 가능한 시간 
을 알아야 한다. 모든 이러한 양 들은 표 3 에 나타나 
있다. 

844 ㅅ 는 다른 것 들 보다 44 배 느리다. 그러나 면적 
. 과 시 간 의 곱은 다른 것 들 보다 눈 에 떠 게 작다. 특히 
844 ㅅ 는 작은 양 의 레 지 스 터 와 5\10108 희 로 , 덧셈 
기 트 리 가 들어간다. 

주어진 공 간 에 대해서 필터 탭 의 수 는 적어도 
24 배 이상 길 수 있다. 이 경우, 클럭 주 168 15 0 에 
비 례 해서 중 가 한다. 그러나 덧 셈 기 트 리 를 0106110108 
함으로써 줄 여 질 수 있다. 늘어나는 탭 수 는 많은 경 
우 0213 전 송 의 60416 ㅁ 60 인 606 접 속 수 를 감 소 시 
킨다. 

이 274186- 아 00 시 스 템 들 에서 면 적 과 다 704981104[ 
은 거의 선 형 적 으 로 중 가 한다. 

이때 단지 0 ㅁ 106170108 6416@ 가 추가적으로 필요할 
뿐이다. 


표 3. 11016 001708「156011 0 16 11106 81 아 1116 아 4165. 


90997 [844 | 484 200 

개 105 0670121 땐 

0006 따 고 9909 | 8028/ 미 0616 봉 | 940/ 띠 애 4 울 
느라 


3.5 병 렬 적 덧 셈 기 트 리 와 누 산기 
덧 셈 기 트 리 의 경 로 가 길기 때문에 시스템 클 럭 의 


속 도 는 사실상 덧 셈 기 트 리 에서 좌 우 한다. 그러므로 
8410 과 080 ㅁ 7 를 트 리 에 서 분 리 하고 이를 말 단 에 서 더 
해주는 작 업 을 필 요 로 한다. 이런 68 ㅅ (087 526 
스 0060) 방 식은 완전한 병 렬 적 디 자 인 이 다. 4 비 트 의 
합 에서 트리는 108 16- 배 에 비 례 하는 시 간 을 소요 
하게 된다. 때문에 한 클 럭 의 주 기 가 이에 따라서 늦 
어 지 게 된다, 만약 트리 안에 레 지 스 터 를 삽 입 하면 
좀더 빠른 클럭 주 기 를 구현할 수 있는데 이에 따른 
클 럭 의 손 해 는 감 수 해야 한다. 

일 상 적 으 로 많이 쓰는 6215＊-100【-83411680 덧 셈 기 
의 경 우 엔 누 산 기 가 010 길 이 에 비 례 하 는 시 간 을 
쓰게 되 어 있 다. 0067 10\ 를 방 지 하 기 ' 위 해서 누 산기 
는 44+/,+2 ㅠ -1 의 길 이 를 가져야 하며 그 만 큼 의 
시 간 이 필 요 하게 된다. 게다가 이 누 산이 1002 에 있으 
므로 덧 셈 기 트 리 의 매 작동 후에 작 동 되어야 한다. 
여기서 사용한 방 법 은 누 산 기 를 모 든 루 프 밖으로 옮 
기는 것이다. 그래서 누 산은 말 단 에서 한번만 실 행 되 
게 된다. 

다 음 의 덧 셈 을 보자. 


$= 혐 000. (11) 


2(2) 은 4, 비 트 를 가진 입 력 이다. 우 리 가 부분 


합 을 다 음 처럼 정 의 한 다면 


800= 함 00. 03) 
식 11 은 다 음 의 합 산 과 같이 표 현 된 다. 
(722) = 8$(2 ㅡ 1)+ 02620, 2=1,2,....0. (13) 


여기서 $(0)=0. 1608000 의 끝 에 서 우 리 는 마지 
막 합 (5$= ㅎ (^)) 8(^/ 을 얻는다. 

이 수 식 은 11081” 160「76561[3000 으 로 다시 씨 어 질 
수 있다. 


32190 = 워 2“96- 17 270“260. (14) 


여기서 (7) 과 2,(20) 은 비 트 임 . 

이제 우 리 는 합 이 비 트 체 계 에 의해서 표 현 되었음 
을 가 정 할 수 있다. 곧 $(2-1) 이 ㅇ @,(20) 와 함께 더 
해져서 630 비 트 인 ㅇ 』,(72)) 과 94170 비 트 인 》』(70) 을 
생 성 한다. 그러므로 


$22)= 21(2)+20』(70. (15) 


방정식 14 에 의해서 

28672) +20(720= 2102 -1)+200(0-1) 

+ 0600). (016) 

20』(7)) 은 ㅇ 』,(20) 을 다 음 의 높은 비트 덧 셈 기 4+1 
에 연 결 함으로써 구 현 된다. 그러므로 

28(2)0+20,(7)= 2,(2-1)+ 0100 - 1) 

+ 00020). (17) 

2 에 대해서 66(2)=0 임 . 이 수 식 은 2,-1)1 
ㅇ -100-1), 0,(0) 을 더해서 9027 비 트 인 2』(70 과 
080 비 트 인 /(70) 을 내 보 냄 을 의 미 하 고 있다. 이 
연 산 은 111 3006 에 의해서 구 현 된 다: 


2(0)= 0(7002,02-1)00,-10-1)0, 
얘 602)= 2060) ㆍ [2,(2-1)00,-100-1)0] 
+28(2-1) ㆍ ㅇ -1(0-1). (18) 


연 산 의 말 단 에서 3010 과 030* 를 합 하 는 연 산 이 
필 요 하 다: 


5=2(20)+ ㅜ 2020. (19) 


이 과 정 은 16002 가 없이 단지 한 번 의 연 산 만 필 요 하 다. 

식 18 과 식 19 를 가지고 그림 7 과 같은 회 로 가 구 
성 된다. 특 징 적 인 것은 벌 셈 이 다. 비트 합 산 의 방식 
과 같은 특수한 경 우 에는 16000 의 마 지 막 에 뻔 셈 이 필 
요 하 다. 이 연 산 은 그 림 에 서 보 여 지 는 것과 같이 손 
쉽게 하 드 웨 어 로 구 현 된다. 


그 00 


때 98) 


그림 7. 05&^ 누 산 기 
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4. 연 구 에서 구 현 된 ^454^ 의 상세 설명 


4.1 전반적인 구성 


위에서 소 개 한 3 가 지 구조 중에서 48 스 방 식 을 칩 
으로 구 현 하 였다. 이는 현재 201 에 서 속도 제 한 올 
감안할 경우 ㅁ 02 ㅁ 0880000 06139 를 이 구 조 가 충분히 
만 족 하 고 (6419[ 로 쓰고 읽는 것을 반 복 하 는 것을 
\81 96266 없 이 지 속 할 수 있음) 누 산 기 의 구 현 이 
84 ㅅ 보다 간 편 하 기 때 문 이 다. 

이 구 조 와 부 합 하 는 식 을 전 개 해 보면 다 음 과 같 
다. 


0 = 음 00 ㆍ ‥0-#. (20) 


여 기 에 서 ※(70) 을 다 음 과 같이 비 트 레 벨 로 표현 
할 수 있다. 

00 =[ 어이 3701-210-1 2, (0. 

(21) 

이 식 에서 ※×,(72)) 은 2 ㅁ 번째 실수 입 력 데 이 터 의 1 번 
째 비 트 를 가리킨다. 곧 다 음 의 수 식 이 나오게 된다. 

000 ㆍ %×0-#=[ 함 200 

2/(2^- 시 ]-2"7 2, -1(0-/, (22) 

이를 대 입 해서 정 리 하 면 다 음 과 같이 나오게 된 
다. 


0= 엄 00 ㆍ ‥×0-# 


덜 에 이: 000^ ㆍ /(2- 씨 - 


2" 002^ ㆍ, -1(02- 시] 


- 험 이 었 00126-6-81 그 
： 었 000 ㆍ ×-10-#, 


위에서 는 다음 그 림 에서 상위 레 지 스 터 에 들어 
가게 된다. 계 수 인 는 다음 그 림 에서 볼 수 있듯이 
계수 레 지 스 터 에 들어 간다. 

시 스 템 의 전반적인 작 동 은 이러하다. 누 산 기 에 먼 
저 계 수 로서 노 드 의 값 들 을 집어 넣는다. 그리고 
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타 0067 0262 10030 


그림 8. 전체 연산 구 


벼 


941 레 지 스 터 에 이 노 드 들 에 곱 하 게 될 값 들 을 로드 
한다. 로 드 가 끝나게 되면 자 리 수 의 개 수 만 큼 의 클럭 
동안 이 991 레 지 스 터 를 움직이면서 누 산 을 시작해 
서 다음 노 드 의 처음 값 을 얻게 된다. 이를 (+ 1400407 ㅁ 
올 거치고 나서 하 위 의 94 레 지 스 터 에 저 장 한 다. 
그리고 나서 다시 처 음 에 말한 90 레 지 스 터 에 다음 
000060000 을 저 장 하고 계 산 해 서 마찬가지로 (7100040 ㅁ 
을 거친 후에 하 위 의 레 지 스 터 에 저 장 한다. 이런 방식 
으로 계속 진 행 해 서 하 위 의 레 지 스 터 를 다음 노 드 의 값 
들 로 모두 채운 후에 그 값 을 컴 퓨 터 로 로 드 하 게 된다. 


4.2 레 지 스 터 들 


그림 9 는 계수 레 지 스 터 로써 정수 계 수 들을 로드 


68016 0 
ㄷ 06111016 판 


그림 9. 계수 11 레지스터. 


한다. 201 에 서 오는 한 클 럭 에 1 개 씩 로 드 하게 되어 
있다. 『1 로 부터 오는 0313 가 32 비 트 이 지만 이 부 분 
을 단순화 시키기 위해서 한번에 하 나 의 02[8 를 로드 
하게 하였다. 전체적인 607016 에 서 이 부 분 이 차 지 하 
는 시 간 이 작기 때문에 속 도 에 있어 영 향 을 크게 미 
치지 않는다. 

그림 10 은 상위 레 지 스 터 의 전체적인 모 습 을 나타 
낸 것이다. 

이것은 10 개 의 블 럭 을 8 개 이어 붙인 것으로 내부 
의 상세한 모 습 은 그림 11 에 나타나 있다. 

그림 11 은 계수 부 분 과 는 달리 두 개 의 레 지 스 터 를 
사 용 하였다. 먼저 상 단 의 레 지 스 터 는 221 에 서 오는 
값 을 한 201 클 럭 에 4 개 씩 채운다. 이렇게 해서 전체 
를 채우면 하 단 의 레 지 스 터 에 이 값 들 을 그대로 로드 
한다. 이렇게 로 드 된 0302 는 계 산 부 분 에 적 용 되 는 클 
럭 에 동 기 되어 한 클 럭 에 하나씩 회 전 하게 된다. 이 
런 방 식 을 사용한 것은 데 이 터 를 로 드 하는 동안에 
모든 연 산 을 처 리 하기 위 함 이다. 곧 연 산 시 간 이 데이 
터 의 로딩 시 간 보다 작 으 므 로 데 이 터 를 로 딩 하 는 동 
안 모든 연 산 이 이뤄지게 된다. 


4.3 계산 부분 


여기서는 계산 파 트 를 상 단 에 서 하 단 의 순 서 로 차 
례 차례 설 명 하겠다, 


즈 오 고즈 7 그 


그림 10. 레지스터 블럭. 


그림 11. 상 단 의 데이터 11[[ 레지스터. 


그림 12 는 상 단 의 레지스터 블 럭 에서 오는 606 시 
그 널 과 계 수 를 곱하는 부 분 이다. 이 부 분 에 서 그림 
11 에 서 내 려 오 는 동일한 자 리 수 의 비 트 들을 계 수 들 
과 곱 해서 아래 단 의 68 트 리 로 들어가게 된다. 


005- 레 리터 어 10 
10 07 어조 


너리 
70 600 


| 


5 ㅁ 019001 ㄴ 60 00-0 리 시 0160 
70 ㅇ 00006106100【Ｌ 


그림 12. /00× 블록. 


그림 13 은 08 트 리 로 써 이를 사 용 해 서 2 ㅁ 0× 블 럭 
의 비 트 들 이 합 해 져 6000 과 0377》 로 나오게 된다. 그 
런 데 비 트 별로 값 을 합 산 하기 때문에 누 산 기 에 서 누 
산 하 기 전에 자 리 수 를 보 정 해 주어야 한다. 곧 * 
68417 과 680 ㅠ 는 그럼 8 의 전체 그 림 에 서 볼 수 있듯 
자리수 보정 래 지 스 터 를 거치게 된다. 자리수 @ 
래 지 스 터 에 서는 자리수 별 로 (60006@ 를 이용) 값 을 
보 정 한다. 이렇게 해서 보 정 된 값 은 그림 14 의 누 산 
기에 들어가게 된다. 
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포 퓨 꾼 6 또 


으 느 피 오 즈 포고? 


그림 13. 65^ 166. 


사실 계산 부 분 의 클럭 속도 중 가 를 위해서 위 의 
(8 내 부 에 파 이 프 를 두 단 집어 넣었다. 신 호 가 내 
려 오 면서 약 해 지 기 때문에 생기는 00147 08 머 가 때문 
이다. 

중 간 에 두 개의 파 이 프 를 박 으면 2 개 의 클 럭 을 손 
해 보 지 만 클럭 속 도 가 중 가 해 전체적으로 속 도 의 증 
가를 가 져 오 게 된다. 그러나 기본적인 설 계 는 그럼 
13 과 같다. 그림 14 는 누적 연 산 기 와 (이다. 

먼저 덧 셈 기 트 리 에 서 오는 값 들 을 그림 14 의 누 
산 기 에서 누 산 시킨다. 처음 값 이 들 어 오 면 0 과 함께 
들어오는 값 을 합 산 해서 내 보 내 는 데 다 음 부터는 이 
렇 게 더해진 값 들 과 새로 오는 값 들 이 합 산 되 게 된 
다. 그러다가 마 지 막 에 최상위 비 트 들의 합 이 들 어 오 
면 그럼 7 에 나온 구 조 에 의해 텔 셈 올 하게 된다. 그 
림 15 는 누적 연 산 기 를 좀더 상세히 보여준다. 이 부 
분 에서 0(70 은 자리수 보 정 후 아래 부 분 의 덧 셈 기 를 
통해 $(/) 과 함께 더 해 지 게 된다. 일단 이렇게 나온 
값 은 21 에 서 읽기 위해서 그럼 16 의 90 레지스터 
에 저 장 된 다. 

그림 16 은 하 위 단 의 94 레 지 스 터 이 다. 누적 연 
산 기 에서 합 산 된 결 과 가 이 쪽 으로 하나씩 들 어 오 게 
된다. 

이런 식 으로 값 들 이 하나씩 저 장 되다가 필요한 만 
큼 연 산 이 끝나면 컴 퓨 터 에서 21 를 통해 이 쪽 의 결 
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0(2 ㅁ 2) 8( 프 ) 


그림 15. 누적 연 산 기. 
과 를 읽게 된다. 그 후에 이 부 분 은 바로 초기화 된다. 


5. 전체 시스템 및 실험 


5.1 전체적인 시 스 템 의 모습 


전반적인 시 스 템 이 그림 17 에 나 타 나 있다. 
이 시 스 템 은 신경망 에뮬레이터 소프트웨어, 201 


그림 16. 하 단 의 데이터 하 1[ 레지스터. 


고미 00 다 


01 
(60000 


모 <1 008 13390<81 20@1 1548 


그림 17. 전체 시스템. 


드라이버, 신 경 망 칩 으로 구 성 된 다 . 신 경 망 칩 은 신경 
의 기 본 계 산 을 하며 『21 드 라 이 버 는 신 호 를 이 칩 에 
공 급 하고 결 과 를 넘겨 받는다. 에 뮬 레 이 터 는 신 호 를 
신 경 망 칩 이 처 리 할 수 있도록 가 공 해 공 급 하 고 결과 
를 받아 처 리 한 다. 아울러 신 경 망 칩 을 이용해 4418, 
160417604Ｌ 2066, 1100110610 16 등 여러 종 류 의 신경망 
의 기 능 을 갖도록 한다. 

여기서 신경망 칩 은 시 프 트 레지스터, 연 산 부 , 누 
산기, 10, 제어부, 201 통 신 부 로 구 성 되어 있다. 
시 프 트 레 지 스 터 는 입 력 신 호 와 신경망 연 결 강 도 를 
저 장 하 고 있고 연 산 부는 08 ㅅ 를 이용한 고속 덧 셈 기 
이며 누 산 기 는 이 결 과 를 바 복 적 으 로 더 하 거 1047 
에서는 시 그 모 이 드 값 을 읽 어 낸 다. 201 부 는 이 칩 을 
201 806 와 연 결 하 며 제 어 부 는 이 모든 시 스 템 을 통 
솔 하고 제 어 한다. 


5.2 실험 


간단한 문 자 인 식 을 칩 을 사 용 해 서 구현해 보았다. 
10 개 의 알 파 벳 을 인 식 하 는 다층 펄 셉 트 론 에서 입력 
에 대해서 각 뉴 론 의 값 들 을 구하는 계 산 과 정 을 칩 
을 사 용 해 서 구 했 는데 계 수 로는 입 력 값 을 넣고 그림 
11 에 보이는 레 지 스 터 에 는 연결 강 도 를 넣었다. 한 
번 계 수 레 지 스 터 를 체 운 다 음 에 그림 11 의 레지스터 
를 다음 충 으로 넘어 가기 전까지 계 속 해 서 채 움 으 


로써 출력 값 들 을 구해 내었다. 이렇게 구 해 진 출력 
들은 칩 내 부 의 아나 레 지 스 터 에 저 장 되 었 다 가 21 
를 통해서 읽어 들인다. 

10 개 의 알파벳 각 각 은 8*8 로 이뤄진 -1 과 1 의 
조 합 으로 표 현 되었으며 곧 입 력 은 64 개 의 노 드 로 구 
성 된다. 

은닉 충 은 하 나 고 44 개 의 펄 셉 트 론 으로 구 성 된 다 . 
출 력 은 8 개 의 펄 셉 트 론 을 가지고 있다. 시 그 모 이 드 
함 수 는 하드웨어 내 부 에 있는 1 ㅁ 로써 대 체 되었는 
데 -1.27 과 1.27 사 이 를 26 개 의 구 간 으 로 나눈 값 
들을 사 용 하였다. 

결 과 적 으로 그림 18 과 같은 학습 그 래 프 롤 얻었다. 

학습 0+824 에 서 가 로 축 은 1608000 을 나타낸다. 
이에 대해서 세 로 축은 0 ㅁ 680 5004876 670 를 나타내 
고 있다. 이렇게 나온 20 개 의 학습 그 래 프 들을 평균 
하면 그림 19 와 같은 학습 그 래 프 가 나오게 된다. 

그림 19 에 서 116678001 이 반 복 될 수록 점점 오차 
가 감 소 하 고 있다. 오 차 가 수 렴 하면서 도중에 변동 


평균 오차 


-*688888085858989 일 엄 


1 아 래 00 


그림 18. 학습 그 래 프 들. 


평 균 오 차 


그림 19. 평 균 한 학습 그래프. 
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이 심하게 나타나고 있는데 이것은 10 ㅜ 에서 나오 
는 값 이 실제 10 함 수 의 시 그 모 이드 값 이 아 넌 성 
긴 Ｌ[11 ㅠ 값 이기 때 문 으로 보 인 다 . 실 제로 겉으로 보 
게 되는 칩 의 속 도 는 데 이 터 의 로딩 시 간 에 의해서 
결 정 된 다. 그래서 표 4 에 이 시 간 들을 몇몇 구체적 
실행 시 간 에 대해서 적어 보았다. 

표 4 에 서 볼 수 있듯이 로 딩 하는 시 간 이 일 정 하 지 
않고 계 속 해 서 변 화 의 양 상 을 보이는데 이것은 8 
칩 셋 에서 각 버 스 를 통 제 하 는 메 카 니 즘 에 의한 것으 
로 보인다. 이런 식 으로 500 개 의 데 이 터 를 모아서 
이것을 평 균 해 보면 표 5 에 서 볼 수 있는 평균 로 덩 
시 간 을 알 수 있다. 


표 4, 데 이 터 의 처 리 에 따른 시간. 


표 5 에 서 볼 수 있듯이 대 부 분 의 시 간 은 레지스터 
를 로 딩 하는데 걸린다. 사실 20 메 가의 속 도 로 처리 
하기 때문에 8 클 럭 의 계 산 시 간 은 8/2044=0.4*10 " 
밖에 걸리지 않는다. 곧 여 기 서 의 시 간 은 순전히 
108010@ 0 ㅁ 016 인 것이다. 


표 5. 평 균 적 인 로딩 시간. 


[ 정 군 로 이 간 | 030 | [440 | [08 | [461 | 


6. 결 과 


고 속 이면서 대 용 량 의 뉴 럴 네 트 워 올 구 현 하기 위 
해서 웨이퍼 스케일 인 테 그 레 이 션 (\61) 나 151, 
디지털 회 로 를 사 용 하 는 등 의 방 법 이 연 구 되고 있 
다. \81 방 식은 일반적인 +Ｌ851 빵 법 보다 고 속 이면 
서 대 용 량 의 회 로 를 구현할 수 있다는 장 점 이 있 
다 .[15-16] 하지만 웨 어 퍼 에 결 점 이 있는 경 우 에 정 
상 적인 연 산 장 치 를 구 성 하는 것이 어렵게 된다. 뉴 
럴 네 트 워 이 어느 정 도 의 에 러 에 대해서 견 덜 수 있 
다는 점 은 이런 결 점 을 극 복 할 수 있게 만든다. 

디 지 털 희 로 는 대 용 량 의 뉴 럴 네 트 워 을 구 현 하기 
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위해 점점 적절한 방 법 이 되 어 가고 있 다 .[17] 현재 
계 속 해 서 발 전 하 고 있는 직 접 기 술 과 통신용 1 ㅁ 206 ㅅ 
의 수 요 가 중 가 하는 추세 등 으로 디지털 회로 기 술 은 
점점 발 전 하고 있다. 또한 디지털 회 로 로 구 현 된 시 
스 템 은 호스트 컴 퓨 터 와 쉽게 연결될 수 있다는 장 점 도 
가지고 있다. 설 계 상 의 용 이 함 도 장 점 이다. 하지만 
아 날 로 그 보 다 는 트 랜 지 스 터 의 효 율 에서 떨어진다. 

그래서 이번 연 구 에서는 이러한 특 징 올 염 두 에 두 
고 아 날 로 그 와는 다른 접 근 을 시도해 보았다. 이전 
의 아날로그 회 로 로는 한 칩 에 16 개 정 도 의 뉴 론 이 
들어가는 수 준 이 었 다 .[18] 다 지 털 회 로 로 (0 ㅁ 2064) 구 
현할 경 우 에 는 이보다 더 큰 수 의 뉴 런 을 넣을 수 
있지만 트 랜 지 스 터 의 효 율 면 에 서 보면 이는 바람직 
하지 않은 것이다. 그래서 뉴 럴 네 트 워 의 뉴 런 을 구 
현 하 지 않고 뉴 런 들 이 연결된 전체적 시 스 템 을 부분 
적 으 로 구 현 하였다. 이를 통해서 여러 개 의 (80 개 까 
지 ) 뉴 런 을 흉내낼 수 있었다. 

결 과 적 으로 80[30 의 8 비 트 의 03[3 를 20 메 가의 속 
도로 현 재 의 1264 장 치 인 16%108-380599-3 에 서 
처 리 하 였다. 하지만 컴 퓨 터 의 608 를 608 로 사용한 
다고 하 여 도 이 속 도 를 따 라 가 지 못 하 였다. 이는 현 
재 실 험 을 실시한 컴 퓨 터 의 마 더 보 드 가 인 텔 사의 
2※× 칩 셋 을 사 용 하 는 관 계 로 60418[ 의 효 율 이 떨어지 
고 많은 0213 를 칩 으 로 다 운 로 드 내 지는 업 로 드 해 야 
되기 때 문 으 로 보인다. 사실 이 구 조 는 칩 을 위한 
068180 이 기 때문에 이런 사 항 들 은 크게 문 제 가 되지 
않는다고 판 단 된 다. 

만약 데 이 터 를 다 운 로 드 하 는 속 도 가 빨 라 진 다 면 
현 재 보다 빠른 속 도 로 데 이 터 를 처 리 하 게 된다. 그 
리고 더많은 노 드 가 필 요 하 다면 같은 연 산 장 치 를 하 
나 더 추 가 하 고 추 가 된 장 치 의 상위 레 지 스 터 와 계 
수 레 지 스 터 에 추가적인 노드 값 들 과 계 수 값 들 을 로 
드 해서 계 산 한 후에 결과 값 들 을 단순히 더해 주기 
만 하면 된다. 보다 빠른 연 산 을 위해서도 장 치 를 더 
추 가 하고 필요한 약 간 의 부가 작 업 을 더해 주면 된다. 

곧 이번 연 구 에 서는 앞으로 만 들 어 질 00 신 
경 망 칩 에 서 이 구 조 가 유 용 하 게 꿔 여 질 수 있음 
보인 것이다. 
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